Hierarchical Experimentalist Agents
层次实验型智能体:通过主动实验进行上下文自我改进
🧭 LLM Agent主动实验与技能学习
University of Massachusetts Amherst
LLM通过主动实验动态学习可复用技能库,在未见物理任务中成功率从2%提升至77%
📌 工作参考价值(4 点)
- 新场景主动探索机制:在推荐或广告系统中,面对新用户群体或新品类时,可借鉴 HExA 的分层实验设计——高层规划探索方向(如尝试不同召回策略),低层执行具体干预并记录结果,形成可复用的“技能”模板(如特定人群的优惠券推送策略),避免盲目 random AB test。
- 在线学习技能库:将推荐系统优化过程抽象为“技能”(如某类 CTR 提升技巧),每次实验后的成功策略存入上下文技能库,下次类似场景可直接组合调用,类似 HExA 的 learn_from_experience,减少重复探索成本。
- 跨场景技能迁移:HExA 从简单物理任务中学习的技能可零样本迁移到困难任务(44% 成功率)。在推荐中,可在一个小流量域(如新频道)学到的有效策略(如冷启动物料组合方式)迁移至主域,降低冷启动成本。
- 上下文技能组合:HExA 通过上下文学习将实验产生的技能组合成复杂策略,业务中可用类似思路将多个简单推荐规则(召回、过滤、排序规则)作为可组合的“技能块”,Agent 根据当前场景动态拼接,无需重新训练模型。